Metric	Score
Weighted-F1	81.73
Hyphens-F1	100.00
Comma-F1	82.94
Ellipsis-F1	59.89
Fullstop-F1	91.70
QMark-F1	85.82
Colon-F1	100.00
Excl-F1	33.33

Metric	Score
Weighted-F1	88.19
Hyphens-F1	90.91
Comma-F1	87.54
Ellipsis-F1	63.01
Fullstop-F1	95.17
QMark-F1	91.25
Colon-F1	100.00
Excl-F1	0.00

worst items

note: the gold standard is taken from the challenge

#	input	expected output	actual output	test-A Ellipsis-F1
1	audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Wie:119580-119670 pan:119700-119760 co:119790-119880	O O B-ELLIPSIS	O O O	0.00
2	audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Proszę:196770-196920 pana:196980-197100 a:197130-197130 co:197280-197340 powinien…	O O O O O O B-ELLIPSIS	O O O O O O O	0.00
3	audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Tak:52320-52410 więc:52440-52560 poproszę:52770-53460	O O B-ELLIPSIS	O O O	0.00
4	audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Na:129600-129660 ten:129720-129810 moment:129870-130140 te:130260-130290 terminy:…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O …	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O …	0.00
5	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Numer:33990-34200 klienta:34320-34710 to:34800-34890 dwa:34980-35160 dwa:35220-354…	O O O O B-ELLIPSIS	O O O O O	0.00
6	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Tak:62490-62880 No:62970-63000 ja:63150-63180 systematycznie:63270-63870 spłacam:6…	O O O O O O O O O O O O O O O O O B-ELLIPSIS	O O O O O O O O O O O O O O O O O O	0.00
7	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Nie:84420-84450 no:84540-84570 nie:84840-84870 Na:85020-85050 jaką:85110-85290 kwo…	O O B-ELLIPSIS O O O O O O O	O O O O O O O O O O	0.00
8	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 No:166200-166230 dobrze:166290-166440 to:166530-166590 co:166680-166740 ja:166770-…	O O O O O O O B-ELLIPSIS	O O O O O O O O	0.00
9	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 żebyście:168270-168600 państwo:168660-168900 znowu:168960-169170 włączyli:169260-1…	O O O O O O O O O O O O O O O B-ELLIPSIS	O O O O O O O O O O O O O O O O	0.00
10	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Czyli:174750-174870 dostanę:174900-175290 ją:175410-175590 Zaraz:175680-175860 pan…	O O B-ELLIPSIS O O O	O O O O O O	0.00
11	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Muszę:197700-197850 tylko:197910-198120 mam:198210-198300 tylko:198360-198510 możl…	O B-ELLIPSIS O O B-ELLIPSIS O O O O O O O O O O O O	O O O O O O O O O O O O O O O O O	0.00
12	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 I:203310-203310 po:203520-203550 prostu:203610-203790 wpłacić:203910-204270 to:204…	O O O O O B-ELLIPSIS O O O O O O O O O	O O O O O O O O O O O O O O O	0.00
13	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 To:19830-19860 dobrze:20700-20940 już:21060-21150 poproszę:21300-21720	O O O B-ELLIPSIS	O O O O	0.00
14	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Ta:72960-73020	B-ELLIPSIS	O	0.00
15	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Termin:122520-122820 płatności:122970-123660 minął:123810-124290	O O B-ELLIPSIS	O O O	0.00
16	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Wie:125970-126030 pani:126120-126240 co:126330-126360 Chwileczkę:126420-126780 Nie…	O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O	O O O O O O O O O O O O O O O O O O O O O	0.00
17	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 No:203430-203490	B-ELLIPSIS	O	0.00
18	audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 Poprosiłabym:29460-30150 A:30630-30630 imię:30930-31080 nazwisko:31140-31530 pani:…	B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O	O O O O O O O O O O O O O O O O O O O O O	0.00
19	audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 ale:171750-171870	B-ELLIPSIS	O	0.00
20	audio/cbiz_tc_24.wav e2a8a04f-2a58-4361-8d2b-c92bb50a7081 Wie:55410-55470 pani:55530-55620 ja:55650-55680 jestem:55710-55890 współwłaściciel…	O O O O O O O O B-ELLIPSIS O O O O O O B-ELLIPSIS	O O O O O O O O O O O O O O O O	0.00
21	audio/cbiz_tc_24.wav e2a8a04f-2a58-4361-8d2b-c92bb50a7081 No:122910-122940 ale:123000-123090 to:123210-123270 najpierw:123330-123630 jeżeli:…	O O O B-ELLIPSIS O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O	O O O O O O O O O O O O O O O O O O O O O O O O O	0.00
22	audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 wyjaśniamy:86850-87360 że:87450-87510 stany:87570-87780 licznika:87840-88170 na:88…	O O O O O O O O O O O O O O O O B-ELLIPSIS	O O O O O O O O O O O O O O O O O	0.00
23	audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 Dobrze:118500-118800 proszę:118890-119100 napisać:119160-119460 w:119520-119520 ta…	O O O O O O O O O O O O O O B-ELLIPSIS	O O O O O O O O O O O O O O O	0.00
24	audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 tak:137310-137370 jak:137400-137550 mówiłam:137610-137940 Prosiłabym:137970-138450…	O O O O O O O O B-ELLIPSIS	O O O O O O O O O	0.00
25	audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 od:141270-141330 tej:141450-141510 decyzji:141570-141900 na:141990-142020 adres:14…	O O O O O B-ELLIPSIS	O O O O O O	0.00
26	audio/cbiz_tc_56.wav 1b68cc28-468b-45e7-8d07-41101491b69e A:18570-18570 czy:18660-18720 jest:24600-24720 pani:24750-24900 właścicielem:36480…	O B-ELLIPSIS O O O O O O	O O O O O O O O	0.00
27	audio/cbiz_tc_56.wav 1b68cc28-468b-45e7-8d07-41101491b69e Zaraz:60540-60900 zaraz:66690-67260 chwileczkę:67290-67560 pani:67590-67890 powiem…	O O B-ELLIPSIS O O O O O O O O O	O O O O O O O O O O O O	0.00
28	audio/cbiz_tc_56.wav 1b68cc28-468b-45e7-8d07-41101491b69e No:139260-139290 zazwyczaj:139320-139740 jest:139830-139920 to:139950-139980 ten:1…	O O O O O O O O O O O O O O O B-ELLIPSIS	O O O O O O O O O O O O O O O O	0.00
29	audio/cbiz_tc_56.wav 1b68cc28-468b-45e7-8d07-41101491b69e Domagala:151770-151770 tak:153930-154080 Kropka:154200-154590	O O B-ELLIPSIS	O O O	0.00
30	audio/cbiz_tc_56.wav 1b68cc28-468b-45e7-8d07-41101491b69e Tak:154830-154950	B-ELLIPSIS	O	0.00
31	audio/cbiz_tc_56.wav b1ac6642-6e1d-4b46-83b2-710dc8ad743e Małpa:177630-177840 Gmail:177900-177900 com:178320-178830	O B-ELLIPSIS O	O O O	0.00
32	audio/cbiz_tc_56.wav b1ac6642-6e1d-4b46-83b2-710dc8ad743e Mm:179940-179940	B-ELLIPSIS	O	0.00
33	audio/cbiz_tc_64.wav ed4ff12e-a462-4c82-a004-38ab9fe618bf Już:21600-21660 oczywiście:21690-22080 postaram:22110-22410 się:22440-22470 pomóc:…	O O O O O O O O O O O O O B-ELLIPSIS O O O O	O O O O O O O O O O O O O O O O O O	0.00
34	audio/cbiz_tc_64.wav ed4ff12e-a462-4c82-a004-38ab9fe618bf I:49470-49470 też:49500-49560 od:49590-49620 razu:49680-49950 jak:49980-50040 będę…	O O O O O O O O O O O O O O B-ELLIPSIS	O O O O O O O O O O O O O O O	0.00
35	audio/cbiz_tc_64.wav ed4ff12e-a462-4c82-a004-38ab9fe618bf Przepraszam:138780-139230 Bo:139380-151290 aj:151410-151410 z:151440-151440 tego:1…	O O O O O O O O O O B-ELLIPSIS O	O B-ELLIPSIS B-ELLIPSIS O O O O O O O O B-ELLIPSIS	0.00
36	audio/cbiz_tc_64.wav ed4ff12e-a462-4c82-a004-38ab9fe618bf wpłaciła:153510-153780 pani:153870-153990 za:154050-154140 półtorej:154170-154650 …	O O O O O O B-ELLIPSIS O O	O O O O O O O O O	0.00
37	audio/cbiz_tc_64.wav ed4ff12e-a462-4c82-a004-38ab9fe618bf połączenia:155580-155940 głosowe:155970-156360 z:156390-156390 poprzedniego:156420…	O O O O O O O O O O O O O O O B-ELLIPSIS	O O O O O O O O O O O O O O O O	0.00
38	audio/cbiz_tc_64.wav 9e40dee7-153b-421b-ae6e-f5504115b826 To:77970-78030 jest:78330-78630 takie:91020-91410 cyfrowe:91650-92790 tak:92910-93…	O O O O O B-ELLIPSIS O O	O O O O O O O O	0.00
39	audio/cbiz_tc_64.wav 9e40dee7-153b-421b-ae6e-f5504115b826 To:123480-123660 znaczy:123930-124260	O B-ELLIPSIS	O O	0.00
40	audio/cbiz_tc_58.wav 4b769478-c84d-4e6a-8d75-804c798b174b Zaraz:26580-26850 zobacz:26970-27150 Prosiłabym:27270-27750 najpierw:27870-28110 o…	O B-ELLIPSIS O O O O O O	O O O O O O O O	0.00